Le 5 décembre, l'équipe des grands modèles ByteDance Doubao a lancé FullStack Bench, la nouvelle référence d'évaluation des grands modèles de code. Couvrant plus de 11 catégories de scénarios réels, prenant en charge 16 langages de programmation et comprenant 3374 questions, cette référence permet une évaluation plus précise des capacités de développement de code des grands modèles dans un domaine de programmation plus large, favorisant ainsi l'optimisation des modèles pour les tâches de programmation du monde réel. Les références d'évaluation de code actuelles, telles que HumanEval et MBPP, se concentrent généralement sur les aspects fondamentaux et avancés.